สันนิษฐานว่าวัดปราสาทสร้างขึ้นในสมัยกรุงศรีอยุธยาตอนปลาย โดยดูจากอุโบสถแบบมหาอุด ได้รับพระราชทานวิสุงคามสีมาเมื่อ พ.ศ. 2310 แต่สันนิษฐานกันว่าสร้างมาตั้งแต่สมัยอยุธยาตอนกลางประมาณสมัยสมเด็จพระเจ้าทรงธรรม สร้างโดยเจ้าพระยากลาโหม (องค์ไล) ผู้ซึ่งต่อมาขึ้นครองราชย์ในพระนาม พระเจ้าปราสาททอง เป็นพระราชบิดาของสมเด็จพระนารายณ์มหาราช[1] ปัจจุบันอุโบสถของวัดนี้ได้รับการขึ้นทะเบียนเป็นโบราณสถานแห่งชาติ